Tmax: A simple recipe for terminal agents
终端智能体简单训练配方 Tmax
🧭 终端 Agent 强化学习训练配方
Allen Institute for AI · University of Washington
用分类法生成数据 + 仅结果奖励 RL，9B 模型在 Terminal-Bench 2.0 上达 27%，超越更大模型
📌 工作参考价值（4 点）
- 数据生成策略可复用：通过难度控制、角色多样化和验证器多样化生成大规模合成训练环境，这套方法可直接用于生成推荐系统智能体的指令或交互数据，尤其适合构建面向开发者的推荐工具 Agent。
- 仅结果奖励的 RL 简单有效：在推荐 Agent 的在线学习场景中，无需设计复杂中间奖励，直接使用最终任务成功与否作为信号，降低工程开销，且对超参不敏感。
- 开源基线可直接加速实验：Tmax 的数据集（2.5 倍于先前最大公开集）和模型可作为起始点，快速验证终端交互类 Agent 在推荐基础设施运维或自动化部署中的应用。
- 小模型通过 RL 可超越大模型：9B 参数模型经过 RL 训练后性能超过 32B 模型，对资源受限的推荐团队有强提示：精调小模型 + 针对性的 RL 数据可能比盲目上大模型更划算。